Il Castello di La Roche-Guyon è una struttura antica, di cui una piccola parte, che si trova sullo sperone roccioso, risale all'XI secolo. La parte più antica del castello, che si trova più in basso, risale al XII secolo ma la struttura attuale è frutto di numerosi lavori che si sono susseguiti nel tempo. Le modifiche più importanti le si devono alla famiglia Silly nel XV secolo e al duca de La Rochefoucauld e a sua figlia nel XVIII secolo.